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BESCHREIBUNG 



Vorrichtung und Verfahren zur multimodalen Registrierung von Bildern 

Die Erfindung betriflft eine Datenverarbeitungseinrichtung und ein Verfahren zur 
Registrierung einer ersten Abbildung eines Objektes, die mit einer ersten Abbildungs- 
5 methode gewonnen wurde, mit einer zweiten Abbildung des Objektes, die mit einer 

anderen Abbiidtmgsmethode, insbesondere mit einer anderen Modalitat gewonnen wurde. 

Chirurgische EingrifFe werden iiblicherweise mit Hilfe von praoperativ erzeugten 
Abbildungen des Operationsgebietes geplant, wobei die Abbildungen beispielsweise durch 

10 (Rontgen-)Computertomografie, Magnetresonanzverfehren oder Rontgenprojektionen 
gewonnen sein konnen und die anatomischen bzw. pathologischen Eigenschafien des 
Patienten zeigen. Fiir minimalinvasive EingrifFe, bei denen das Operationsgebiet nicht 
direkt sichtbar ist, sind in der Regel zusatzlich intraoperativ gewonnene Abbildungen 
erforderlich. Insbesondere konnen Anderungen der Anatomie (beispielsweise die 

15 Verschiebung von Organen durch die Intervention oder durch Bewegung wie die Atmung 
oder den Herzschlag des Patienten) sowie chirurgische Infbrmationen wie die Position der 
chirurgischen Instrumente mit intraoperativen Abbildungen erfksst werden. Allerdings sind 
Magnetresonanz- (MR) Verfahren oder die Computertomografie (CT) fiir die Erzeugung 
intraoperativer Abbildungen weniger geeignet, da ihre Einsatzmoglichkeiten in einem 

20 Operationssaal oder einem Interventionsraum beschmnkt smd und sie typischerweise keine 
Bilder in Echtzeit liefem. 



Gut anwendbar fiir die Erzeugung intraoperativer Abbildungen sind dagegen 
Ultraschallverfehren^ Da der Chirurg die Ultraschallsonde in der Regel manuell steuert und 

25 sich somit die Abbildungsgeometrie standig andert, ist es jedoch schwer fiir ihn, das 
Ultraschallbild mental mit einem praoperativen dreidimensionalen MR/CT-Bild zur 
Deckimg zu bnngen. Diesbezuglich ist aus der WO 01/78010 A2 ein Verfahren bekannt, 
mit welchem praoperativ gewonnene CT- oder MR-Abbildungen einer Rohrenstruktur mit 
intraoperativen Ultraschallabbildungen registriert werden konnen. Bei einer solchen 

30 Registrierung von Abbildungen verschiedener Modalitaten besteht das Problem, dass 
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aufgrund verschiedener charakteristischer Abbildungseigenschaften der Modalitateu die 
resultierenden Bilder dasselbe Objekt unterschiedlich darstellen. Dies erschwert eitie an sich 
wiinschenswerte merkmalsbasierte Registxierung der Abbildungen. 

5 Vor diesem Hintergrund war es eine Aufgabe der vorliegenden Erfindung, Mittel zur 
verbesserten Registxienxng imterschiedlicher Abbildixngen bereitzustellen. 

Diese Atifgabe wird durch eine Datenverarbeitungseinriditung mit den Merkmalen des 
Anspruchs 1 sowie durch ein Verfahren mit den Merkmalen des Anspmchs 9 gelost^ 
10 Vbrteilhafte Ausgestaltungpn sind in den Unteranspriichen endialten. 

Die erfindungsgemafie Datenverarbeitungseinriditung dient der Registrierung einer ersten 
Abbildung eines Objektes mit einer zweiten Abbildimg des Objektes, wobei die erste 
Abbildung mit einer ersten Abbildungsmethode und die zweite Abbildung mit einer 

15 hiervon unterschiedlichen zweiten Abbildungsmethode gewonnen wurde. Die 

Unterschiedlichkeit der Abbildungsmethoden kann dabei insbesondere in der Anwendimg 
verschiedener Modalitaten bestehen. Bezugnehmend auf die eingangs geschilderte Situation 
konnte die erste Abbildung beispielsweise eine dreidimensionale CT-Aufnahme tmd die 
zweite Abbildung eine intraoperative Ultraschallaufnahme sein. Die Unterschiedlichkeit 

20 der Abbildungsmethoden konnte jedoch auch in der Anwendimg verschiedener Auihahme- 
bedingungen (Protokolle) fiir dieselbe Modalitat bestehen, z3. bei CT-Aufhahmen mit 
und ohne Kontrastmittelgabe oder bei MR-Aufhahmen mit unterschiedlichen 
Aufnahmeparametern. Die Datenverarbeitungseinrichtung ist ferner dazu eingerichtet, die 
folgenden Schritte auszufuhren: 

25 

a) Die Erzeugung einer ersten transformierten Abbildung aus der genannten ersten 
Abbildung, wobei in dieser transformierten Abbildung charakteristische 
Abbildungseigenschaften der ersten Abbildimgsmethode reduziert und/oder 
charakteristische Abbildungseigenschaften der zweiten Abbildungsmethode 
30 verstarkt werden. Eine charakteristische Abbildungseigenschaft der Abbildungs- 

methode "Ultraschall" ist es beispielsweise, Abschattungen hinter Knochen oder 
gasgefuUten Volumina zu zeigen sowie unterschiedliche Gewebe je nach 
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Schallgeschwindigkeit der Schallsignale verzerrt darzustellen. In der ersten 
transformierten Abbildung findet eine Angleichung an die zweite Abbildung statt, 
indem axif die zugehorige erste Abbiidtingsmetliode zurixckgehende Eigenheiten 
reduziert warden imd/oder indem Bildmerkmale verstarkt bzw- erzeugt werden, die 
bei Erzeugung der Abbildung mit Hilfe der zweiten Abbiidnngsmethode 
aufgetreten waren. 

Die Erzeugung einer zweiten transformierten Abbildung aus der zweiten 
Abbildung, wobei in der zweiten transformierten Abbildung optional 
charakteristische Abbildungseigenschaften der zweiten Abbildungsmethode 
reduziert und/oder optional charakteristische Abbildungseigenschaften der ersten 
Abbildixngsmethode verstarkt werden. Analog zu Schritt a) wird somit ausgehend 
von der zweiten Abbildung und der zugehorigen zweiten Abbildxmgsmethode ein 
Angleichen an die Sicht- und Darstellungsweise der ersten Abbildung 
vorgenommen* 

Da es haufig ausreicht, eine der beiden urspriinglichen Abbildungen in Bezug auf 
die verschiedenen Abbildung^methoden der anderen Abbildung anzugleichen, kann 
die zweite transformierte Abbildung insbesondere auch identisch mit der 
urspriinglichen zweiten Abbildung sein (d.h. die Transformation ist die Identitat) . 
In diesem Falle erfolgt die Betrachtung der zweiten "transformierten" Abbildung 
aus rein formalen Grixnden, um die Darstellung des Verfahrens zu vereinheitlichen. 

Die Registrierung der in Schritt a) xmd b) gewonnenen transformierten 
Abbildungen. Unter der "Registrierung" wird dabei in iiblicher Weise die 
wechselseitige Zuordnung von Objektpunkten in den verschiedenen Abbildungen 
verstanden, Registrierte Abbildungen konnen insbesondere so einander ixberlagert 
dargestellt werden, dass sich die Bildpunkte decken, die zu demselben Objektpunkt 
gehoren. Des Weiteren versteht es sich, dass mit der Registrierung der 
transformierten Abbildungen auch die zugeh5rige Registrierung der urspninglichen 
(ersten imd zweiten) Abbildungen bekannt ist, so dass diese zum Beispiel einander 
iiberlagert auf einem Monitor dargestellt werden konnen. 
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Bei der beschriebenen Datenverarbeitungseinrichtung werden Abbildungeti unter- 
schiedlicher Abbildun^methoden vor ihrer Registriening erst in Bezug axjf das 
charakteristische Abbildungsverhalten der Methoden aneinander angeglichen. Hierdurch 
5 konnen aufiergewohnliche Eigenheiten einer Abbildungsmediode, die zu Fehl- 

registrieningen der ixrsprunglichen Abbildtingen fiihren wiirden, eliminiert werden. In den 
transformierten Abbildungen sind im Wesentlichen nur noch solclie Strukturen enthalten, 
die von den beteiligten Abbildungsmethoden in Bezug auf ein anwendungsspezifisch 
gewahltes Ahnliciikeitsmafi in etwa gleicher Weise abgebildet werden. Auf diese Weise 
1 0 konnen die Abbildungen trotz ihurer Herkunft aus unterschiedlichen Abbildungsmethoden 
mit grofier Genauigkeit registriert werden. 

Wie bereits erlautert wtirde, konnen die erste und zweite Abbildungsmethode die 
Anwendung unterschiedlicher Modalitaten beinhalten. In diesem Falle kann von den 

1 5 beteiligten Modalitaten eine insbesondere eine Computertomografie, eine 

Rontgenprojektion oder ein Magnetresonanzverfahren sein, wobei die zugehorige 
Abbildung zweidimensional oder auch dreidimensional sein kann. Insbesondere kann dies 
fur die erste Modalitat, welche der Erzeugung der ersten Abbildung zugrunde liegt, gelten. 
Zwei- oder dreidimensionale Abbildungen, die mit einer der genannten Modalitaten 

20 erzeugt wurden, eignen sich insbesondere als praoperative Aufiiahmen zur Planting eines 
dhdrurgischen Eingrifis. Des Weiteren kann eine der Modalitaten ein Ultraschall- 
Abbildungsverfahren, ein (Eclitzeit-)Magnetresonanzverfiihren, eine Rontgenfluoroskopie 
oder eine CT-Fluoroskopie sein. Vorzugsweise handelt es sich in diesem Falle um die 
zweite Modalitat, welche dann insbesondere fiir die intraoperative Beobachtung eines 

25 chirurgischen EingrifFes geeignet ist. 

Alternativ kann die Unterschiedlichkeit der Abbildungsmethoden auch darin bestehen, dass 
die Abbildungen mit derselben Modalitat bei verschiedenen Aufnahmebedingungen 
erzeugt wurden. Beispielsweise kann die erste Abbildtmg eine praoperative 
30 Rontgenaufnahme unter Kontrastmlttelgabe sein, wahrend die zweite Abbildung eine 
Rontgenaufnahme ohne Kontrastmittel ist. 
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Fiir das in Schiitt c) eingesetzte Registxierungsverfahren stehen prinzipiell alle hierfur 
geeigneten Ansatze und Algorithmen zur Verfugung. Vorzugsweise kann es sich tun eine 
merkmalsbasierte Registrierung der transformierten Abbildungen handeln. Das hei£t, dass 
in den transformierten Abbildungen bildbasierte Merkmale wie z.B* 
5 Intensitatsverteilungen, die etwa Gefafiverzweigungen, Organe oder Organgrenzen, 

Knochen, Implantate und dergleichen anzeigen, detektiert werden, so dass die Abbildungen 
anschliefiend aufgrund der Merkmale transfbrmiert werden konnen. Vorteilhaft an der 
merkmalsbasierten Registrierung ist, dass sie gezielt Strukturen bzw* Objekte zur Deckung 
bringt, was fur die Anwendung in der Regel besonders relevant ist, 

10 

GemaS einer Weiterbildung der Datenverarbeitimgseinrichtung kann diese dazu 
eingerichtet sein, in mindestens einer der Abbildtmgen (das heifit der ersten Abbildung, der 
zweiten Abbildung oder in einer der transformierten Abbildungen) Objektbereiche mit 
unterschiedlicher materieller Zusammensetzung zu segmentieren. Eine solche auf das 

15 Objektmaterial bezogene Segmentierung ist bei der Erzeugung der transformierten 
Abbildungen hilfreich, da unterschiedliches Abbildimgsverhalten verschiedener 
Abbildungsmethoden in der Regel mit verschiedenen Materialien des Objektes 
zusammenhangt. So haben beispielsweise Knochen oder gasgefullte Volumina fur 
Ultraschallverfahren eine hohe Bedeutung, da sie hierfur prakdsch undurchsichtig sind und 

20 die hinter ihnen liegenden Bereiche nur Artefekte statt relevanter Information iiber das 
Objekt enthalten. Wenn daher auf einer MR- oder CT-Auihahme derartige 
Materialbereiche des Objektes ermittelt werden konnen, kann eine Vbrhersage iiber die 
Darstellung des Objektes mit einem Ultraschallverfahren getroffen werden. 

25 GemafJ einer anderen Weiterbildtmg der Datenverarbeittmgseinrichtung, die insbesondere 
in Verbindung mit der vorstehend genannten Ausbildvmg eingesetzt werden kann, konnen 
Bereiche von einer oder beiden transformierten Abbildungen maskiert werden, in denen 
mindestens eine der Abbildun^methoden keine zuverlassige Bildinformation liefert. Die 
Maskierung solcher Bereiche fuhrt definitionsgemafi dazu, dass diese bei einer 

30 Registrierung der transformierten Abbildxmgen nicht benicksichtigt werden. Hierdurch 
wird gewahrleistet, dass die Registrierung im Wesendichen auf Bereichen erfolgt, die von 
den beiden Abbildungsmethoden ahnlich abgebildet werden. Durch die Maskiemng 
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konnen beispielsweise Bereiche hinter Knochen oder luftgefullten Vblumina ausgeschlossen 
werden, die in Ultraschallaufhahmen abgeschattet sind. 

Um die Genauigkeit der Registxierung weiter zu verbessern, konnen zusatziiche 
5 Informationen verwendet werden. Insbesondere konnen gemessene Positionen 

ixbereinstimmender Objektpxinkte tind/oder eine Kalibrierung der Abbildiingen bei der 
Registriertmg z.B. in Form von Startwerten beriicksichtigt werden. 

Gemafi einer anderen Weiterbildxxi^ der Datenverarbeitxingseinriclitung kann diese in der 
10 Lage sein, Verfeliren der eiastischen Registxierung von Bildinhaiten einzusetzen, Au£ diese 
Weise konnen auch EfFekte durch eine Deformation des Gewebes und/oder durch eine 
Organverschiebung beriicksichtigt werden. 

Die Erfindung betriflft fcrner ein Verfahren ztu: Registrierung einer ersten Abbildung eines 
15 Objektes, die mit einer ersten Modalitat gewonnen wurde, mit einer zweiten Abbildxxng des 
Objektes, die mit einer von der ersten Modalitat unterschiedlichen zweiten Modalitat 
gewonnen wurde, umfassend die folgenden Schritte: 

a) Die Erzeugung einer ersten transformierten Abbildtmg aus der ersten Abbildung, in 
20 welclier charakteristische Abbiidungseigenschaften der ersten Modalitat reduziert 

und/oder charakteristische Abbiidungseigenschaften der zweiten Modalitat verstarkt 
sind. 



b) Die Erzeugung einer zweiten transformierten Abbildung aus der zweiten 
25 Abbildung, in welcher optional charakteristische Abbiidungseigenschaften der 

zweiten Modalitat reduziert und optional charakteristische Abbiidungseigenschaften 
der ersten Modalitat verstarkt sind. 



c) Die Registrierung der transformierten Abbildungen, welche vorzugsweise iterativ 
30 erfolgen kann. 



Das Verfahren umfasst in allgemeiner Form die mit einer Datenverarbeitungseinrichtung 
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der oben erlauterteti Art ausfuhrbaren Schritte. Hinsichtlich der Einzelheiten, Vorteile und 
Weiterbildungen wird daher auf die obige Beschreibung verwiesen. 

Gema£ einer Weiterbildung des Verfahrens werden die Scliritte a), b) und c) unter 
5 Variation mindestens einer der transfbrmierten Abbildnngen mehrfach wiederholt, um auf 
diese Weise iterativ ein Ahnlichkeitsmafi zwischen den erhaltenen transfbrmierten 
Abbildungen zu maximieren. Durch eine solche Iteration des Verfahrens kann die 
Genaulgkeit der Registrierung erhoht werden, wobei jedocli bereits fruhzeitig ein erstes 
(vorlaufiges) Ergebnis zur Verfiigung steht und beispielsweise auf einem Monitor fur eine 
1 0 Anzeige verwendet werden kann. 

Im Folgenden wird die Erfindung mit Hilfe der beigefiigten Figur beispielhaft erlautert. 
Die einzige Figur zeigt schematiscli den Einsatz einer erfindungsgemafien Daten- 
verarbeitungseinrichtung zur Registrierung von CT-Aufiiahmen und 
15 Ultraschallauihahmen. 

Wienngleich das erfindungsgemalSe Verfahren nachfblgend am Beispiel eines chirurgischen 
EingciEEs eriautert wird, ist es nicht auf medizinische Anwendungen beschrankt. Es ist 
vielmehr in alien Fallen einsetzbar, in denen Abbildungen registriert werden soUen, die mit 
20 unterschiedlichen Modalitaten gewonnen wurden. 

Im linken Teil der Figur ist schematisch die Situation bei einem medizinischen EingrifF an 
einem Patienten 3 dargestellt. Zur Vorbereitung des EingrifFes werden vom 
Operationsgebiet dreidimensionale Rontgenaufnahmen A mit einem CT-Gerat 1 
25 angefertigt und in einer Datenverarbeitungseinrichttrng 10 (Workstation) gespeichert. 

Wenn der chimrgische EingrifF minimalinvasiv ausgefiihrt werden soil, beispielsweise mit 
einem Katheter oder einer Interventionsnadel, ist eine Echtzeitbeobachtung des Eingrifl^ 
^vs^hrend der Operation erforderlich. Zu diesem Zweckist ein Ultraschallgerat 2 
30 vorgesehen, welches vom Arzt manuell gesteuert werden kann xmd zweidimensionale 

Schnittbilder B des Korpervolumens an die Datenverarbeitungseinrichtung 10 liefert. Um 
dem Arzt die Interpretation der aktuellen Ultraschallaufnahmen zu erleichtern, ist es 
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wiinschenswert, diese mit der korrespondierenden Schicht aus der praoperativ gewonnenen 
dreidimensionalen. CT-Atifnahme A zu registxieren und beide Abbildungen korrekt 
iiberlagert aixf einem Monitor 12 darzxistellen. 

5 Um eine moglichst gute Registrierung der Abbildimgen A, B trotz ihrer Herkunft aus 
unterschiedlichea Modalitaten dturchfuhren zu konnen, wird das nachfolgend naher 
erlauterte Verfahren ausgefuhrt. Das Verfahren ist dabei typischerweise durch Anweisiuigen 
fixr eine Recheneinheit 1 1 (CPU) des Computers 10 implementiert, das heifit in Form von 
Programmcode bzw. Software. Der Programmcode kann sich zum Beispiei in einem 

10 Speicher (RAM, Festplatte etc.) des Computers 10 oder auf einem wechselbaren 

Speichermedium (Diskette, CD, Ms^etband etc.) befinden. Ziei des Verfahrens ist es, vor 
einer Registriemng die urspriingiichen Abbildungen A, B so aneinander anzugleichen, dass 
Besonderheiten der jeweils zugrunde iiegenden Modalitaten vermindert tmd die 
Darstellungsweisen einander angeglichen werden. Dies kann insbesondere mit den 

1 5 folgenden Verfahrensschritten geschehen: 



20 



1. Segmentierimg der dreidimensionalen CT-Abbildung A in Bereiche 

imterschiedlicher Materialzusammensetzung, zum Beispiei Knochen, Lufi, 
Weichteile etc. 



2. Erzeugung einer zweidimensionalen Testabbildung aus der urspriingiichen 
CT-Abbildung A, wobei die charakteristischen Abbildungseigenschaften eines 
Ultraschallsystems berucksichtigt werden. Bei dieser Beriicksichtigung findet 
insbesondere das Ergebnis der Segmentierung aus dem vorangegangenen Schritt 

25 Verwendung, da sich verschiedene Materialien unterschiedlich auf einem 

Ultraschallbild darstellen. Ferner wird testweise eine bestimmte Position und 
Orientierung des Ultraschallgerates angenommen. 

3. Maskierung von Bereichen im vorstehend genannten Testbild, welche bei einer 
30 Erzeugung durch ein Ultraschallverfahren keine zuverlassige Bildinformation iiber 

das Objekt enthalten wiirden. Insbesondere konnen dabei Schatten hinter ICnochen 
und/oder hinter Lufteinschliissen (zum Beispiei im Darm oder in der Lxmge) 
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maskiert, das heifSt aus dem Bild ausgeschnitten werden. Als Ergebnis der 
Schritte L bis 3. wird eine transformierte (Test-) Abbildung A' erhalten. 

4. Erzetigung einer transformierten Ultraschailabbildung B', indem die urspriingliche 
5 Ultraschailabbildung B axxf die nicht-maskierten Bereiche der transfbrxxiierten. 

Abbildung A' beschrankt wird. 

5. Registrierung der transformierten Testabbildung A' urxd der transformierten 
Ultraschailabbildung B' und Berechnung eines Ahnlichkeitsmafies zwischen diesen 

10 Abbildungen. 

6. Maximierung des AhnlichkeitsmaSes, indem die Schritte 2. bis 5- fur verschiedene 
zweidimensionale Testabbiidungen aus der urspriinglichen Abbildung A wiederholt 
werden. Beispielsweise kann die angenommene Lage der Ultraschallsonde in den 

1 5 verschiedenen TestabbUdungen variiert werden. 

Am Ende des vorstehend erlauterten Verfahrens ist eine sehr genaue imd robuste 
Registrienmg der urspriinglichen Abbildungen A und B bekannt, Diese kann in iiblicher 
Weise zum Beispiel dazu verwendet werden, das intraoperative Ultraschallbild B und die 
20 praoperative CT-Abbildung A aiif einem Monitor 12 iiberlagert darzustellen. 

Kerngedanke des erfmdungsgemafien Verfkhrens ist es somit, die mit unterschiedlichen 
Modalitaten gewonnenen Abbildungen A und B zunachst in Bezug auf Besonderheiten der 
jeweiligen Modalitaten einander anzugleichen. Dies kann wie oben beschrieben dadurch 

25 geschehen, dass eine der Abbildungen (A) in Richtung der Abbildungseigenschafien der 
anderen Modalitat (Ultraschall) transformiert wird, wahrend die andere Abbildung (B) im 
Wesentlichen unverandert bleibt. Ebenso ware es jedoch auch moglich, die 
Ultraschailabbildung B zusatzlich oder alternativ als Ausgangspunkt fur eine Modalitats- 
Transformation zu verwenden. Des Weiteren ist es denkbar, die urspriinglichen 

30 Abbildungen A> B jeweils unabhangig von der anderen Modalitat zunachst in eine 
Zwischendarstellung zu transformieren, welche nur modalitatsunabhangige 
Bildeigenschaften aufweist* Derartige Zwischendarstellungen kormten dann beUebig mit 
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Bildern aus anderen AbbUdungsverfahren registriert werden. 

Das erlauterte Verfahren kann selbstverstandlich auch bei anderen als den dargestellten 
Modalitaten eingesetzt werden. Beispielsweise konnte an Stelle des CTs 1 ein 

5 Magnetresonanzverfahren zxxr Erzeugung der dreidimensionalen Abbildungen A eingesetzt 
werden. Ebenso konnte das intraoperativ eingesetzte Ultraschallsystem 2 durch ein 
Echtzeit-MR-System und/oder eine CT-Fluoroskopie ersetzt werden. 

Dnrch ein Positionsmesssystem und/oder eine Kalibrationsprozedur der beteiligten 
10 Abbildnngsmodalitaten konnten ferner automatisch geeignete Startwerte fur das oben 
erlauterte Optimierungsverfahren generiert werden. Diesbeziiglich ist in der 
Figur beispielhaft ein elektromagnetisches Lokalisierungssystem mit einer 
Magnetfeldsonde 4 auf dem Korper des Patienten und einem Feldgenerator 5 dargestellt, 
die ihre Messdaten iiber die raumliche Position des Patienten an das 
15 Registrierungsmodul 1 1 senden. Selbstverstandlich sind auch andere Einrichtungen wie 
Z.B. optische Lokalisierungssysteme fur diesen Zweck anwendbar. Aus einer Kalibrierung 
der Aufnahmegerate (Rontgen, Ultraschali) kann ferner bekannt sein, welches Pixel bzw. 
Voxel zu welchem Raumpunkt in Bezug auf das Gerat gehort, oder mit anderen Wbrten 
wie die erzeugte Aufhahme in einem geratebezogenen Koordinatensystem liegt. Wenn 
20 dann weiterhin die Raumposition des Aufiiahmegerates bekannt ist, kann auf die absolute 
Raumposition eines Bildptxnktes geschlossen werden. Ist dies ferner fiir mehrere oder alle 
Aufnahmegerate der Fall, so konnen als Endschritt der Kalibrierung die geratebezogenen 
Koordinatensystem ineinander transformiert werden. Auf diese Weise kann auch eine 
Vorauswahl der in Schritt 2 erzeugten zweidimensionalen Testabbildung getroffen werden. 

25 

Um bei der Bildregistrierung die Deformation von Gewebe und/oder die Bewegung von 
Organen benicksichtigen zu konnen, ist ferner der Einsatz elastischer 
Registrierimgsverfahren moglich. Derartige Verfahren werden beispielsweise bei B J^. 
Maintz und M. A.Viergever, "A survey of medical image registration" (Medical Image 
30 Analysis, vol. 2, no. 1, S. 1-36, 1998) beschrieben. 



11 



PHDE040058 EPP 



PATENTANSPRUCHE 



L Datenverarbeitungseinrichtung (10) zur Registrierung einer ersten Abbildung (A) eines 
Objektes, die mit einer ersten Abbildtingsmediode (1) gewonnen wurde, mit einer zweiten 
Abbildung (B) des Objektes, die mit einer von der ersten Abbiidungsmethode 
unterschiedlichen zweiten Abbiidungsmethode (2) gewonnen wurde, wobei die Daten- 
5 verarbeitungseinrichtung dazu eingerichtet ist, die folgenden Sdiritte auszufuhren: 
a) Erzeugung einer ersten transformierten Abbildung (A!) aus der ersten 

Abbildung (A), in welcher charakteristische Abbildtmgseigenschafien der ersten 
Abbiidungsmethode (1) reduziert und/oder charakteristische Abbildungs- 
eigenschaften der zweiten Abbiidungsmethode (2) verstarkt sind; 
10 b) Erzeugung einer zweiten transformierten Abbildung (B') aus der zweiten 

Abbildung (B), in welcher gegebenenfalls charakteristische Abbildungseigenschaften 
der zweiten Abbiidungsmethode (2) reduziert und gegebenenfalls charakteristische 
Abbildungseigenschaften der ersten Abbiidungsmethode (1) verstarkt sind; 
c) Registrienmg der transformierten Abbildungen (A, B'). 

15 

2. Datenverarbeitxmgseinrichtung nach Anspruch 1 , dadurch gekennzeichnet, dass die 
Abbildungsmethoden die Anwendung unterschiedlicher Modalitaten beinhalten, wobei 
eine der Modalitaten eine Computertomografie (1), eine Rontgenprojektion, ein 
Magnetresonanz-Abbildungsverfahren, ein Ultraschallverfahren (2), eine 
20 Rontgenfluoroskopie oder eine CT-Fluoroskopie ist, und wobei die damit erzeugte 
Abbildung (A) zweidimensional oder dreidimensional ist. 
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3. Datenverarbeitvmgseinrichmng nach Anspruch 1, dadtirch gekennzeichnet, dass die 
Abbildun^methoden mit derselben Modalitat bei verschiedenen Aufnahmebedingungen 
erzeugt wurden. 

5 

4. Datenverarbeitxingseinrichtiing nach Anspruch 1, welche dazu eingerichtet ist, eine 
merkmalsbasierte Registrierung der transformierten Abbildungen (A', B') auszufiihren. 

5. Datenverarbeitungseinrichtung nach Anspruch 1, welche dazu eingerichtet ist, in 

10 mindestens einer der Abbildungen (A) Objektbereiche mit unterschiedlicher materieller 
Zusammenseteung zu segmentieren. 

6. Datenverarbeitungseinrichtung nach Anspruch 1, welche dazu eingerichtet ist, Bereiche 
der transformierten Abbildungen (A') zu maskieren, in denen mindestens eine der 

15 AbbUdungsmethoden (2) keine zuverlassige Bildinformation liefert. 

7- Datenverarbeitungseinrichtung nach Anspruch 1, welche dazu eingerichtet ist, mit Hilfe 
eines Positionsmessgerates gemessene Positionen und/oder eine Kalibrierung der 
Abbildixngen (A, B) bei der Registrierung zu beriicksichtigen. 

20 

8. Datenverarbeitungseinrichtung nach Anspruch 1, welche dazu eingerichtet ist, Verfahren 
der elastischen Registriertmg anzuwenden. 
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9. Verfahren zur Regis trierung einer ersten Abbildting (A) eines Objektes, die mit einer 
ersten Abbildtingsmediode (1) gewonnen wurde, mit einer zweiten Abbilduiig (B) des 
Objektes, die mit einer von der ersten Abbildnngsmethode unterscliiediichen zweiten 
Abbildungsmethode (2) gewonnen wurde, umfassend die folgenden Schritte: 

a) Erzeugung einer ersten transformierten Abbildung (A) aus der ersten 
Abbildting (A), in welcher charakteristische Abbildungseigenschaften der ersten 
Abbildungsmethode (1) reduziert und/oder charakteristische Abbildtuigs- 
eigenschaften der zweiten Abbildungsmethode (2) verstarkt sind; 

b) Erzeugung einer zweiten transformierten Abbildung (B') aus der zweiten 
Abbildung (B), in welcher gegebenenfalls charakteristische Abbildun^eigenschaften 
der zweiten Abbildungsmethode (2) reduziert und gegebenenfalls charakteristische 
Abbildungseigenschaften der ersten Abbildungsmethode (1) verstarkt sind; 

c) Registriertmg der transformierten Abbildungen (A', B')* 

10, Verfahren nach Anspmch 9, dadurch gekennzeichnet, dass die Schritte a), b) tuid c) 
unter Variation mindestens einer der transformierten Abbildimgen (A') mehrfach 
wiederholt werden, um ein AhnlichkeitsmaB zwischen den transformierten 
Abbildungen (A, B') zu maximieren. 
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ZUSAMMENFASSUNG 

Vorrichtung xind Verfahren zur multimodalen Registrierung von Bildern 

Die Erfindung betriflft eine Vbrrichtting und ein Verfahren, mit denen Abbildungen 
iinterschiedlicher Abbildungsmethoden registriert werden konnen, beispielsweise 
5 praoperativ gewonnene 3D Rontgen-Aufnahmen (A) und intraoperativ gewonnene 
Ultraschallabbildungen (B). Dabei werden in einer Datenverarbeitungseinrichtung (10) 
zunachst transformierte Abbildungen (A, B') erzeugt, welche in Hinblick auf 
Besonderheiten der jeweiligen Abbiidungsmedioden einander angeglichen sind. 
Insbesondere kann aus der dreidimensionalen CT-Abbildung (A) ein zweidimensionales 
10 Biid (A) erzeugt werden, welches die charakteristische Darstellungsweise eines 

Ultraschallsystems beriicksichtigt, indem abgeschattete Bereiche hinter Knochen und/oder 
gasgefiillten Volumina ausgeblendet werden. Durch eine merkmalsbasierte Registrierung 
der transformierten Abbildungen (A, B') werden Fehler vermieden, die auf Artefakte bzw. 
Besonderheiten der jeweiligen Abbildungsmethoden zunickgehen. 
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